Elasticsearch、Fluentd与Kibana的组合（EFK）可以进行日志数据的采集、索引、搜索以及可视化。该组合是商业软件Splunk的替代：Splunk在一开始用的时候也是免费的，但如果数据多了则需要收费。

本文介绍如何用该组合构建你的日志解决方案。

Elasticsearch需要Java，所以先安装Java。

检查一下Java是否成功安装了：

输出应该是这个样子：

下一步，下载Elasticsearch的deb安装包，安装之。

到1.2版本为止，Elasticsearch的动态脚本功能是默认开启的。因为本文将把Kibana仪表盘设置为从公网可以访问，所以为了安全起见最好关闭这个功能。进入/etc/elasticsearch/elasticsearch.yml文件，在末尾加入如下一行内容：

运行如下命令运行Elasticsearch：

进入你的用户主目录：

输入如下命令以下载Kibana：

我们需要Kibana使用80端口与Elasticsearch进行通讯，而不是默认的9200端口，因此我们需要更改Kibana的配置文件config.js。

用编辑器打开/usr/share/kibana-3.1.0/config.js，找到下面这行：

把它替换成下面这行：

我们使用Nginx作为代理服务器，让经过身份认证的用户可以从公网访问Kibana的仪表盘。

首先，安装Nginx：

Kibana自带的nginx.conf写得已经比较好，我们只需要做一点点修改即可。

首先，下载安装配置文件：

注：该配置文件来源于这个Github仓库。

然后，在编辑器中打开/etc/nginx/sites-available/default，进行如下修改（主要是server_name、access_log、location三部分）：

最后，重启nginx：

现在，在浏览器里打开服务器的IP地址或域名，就应该能看到Kibana的仪表盘了：

最后是Fluentd的安装。我们将使用Fluetd的软件包版本td-agent，该软件包由Treasure Data维护。

使用如下命令安装Fluentd：

我们需要安装如下几个插件：

输入以下命令安装插件（第一个apt-get用于安装out_elasticsearch，这会需要服务器上安装过make和libcurl）：

然后，配置Fluentd以监听syslog并将其发送给Elasticsearch。用编辑器打开/etc/td-agent/td-agent.conf，在文件开头处添加如下内容：

输入如下命令启动Fluentd：

Ubuntu 14.04自带了rsyslogd。我们需要对它做一些配置，以将syslog事件转发到Fluentd监听的端口（本文使用了5140端口）。

用编辑器打开/etc/rsyslog.conf（需要sudo权限），在文件首部添加如下内容：

保存退出，重启rsyslogd：

Kibana默认的仪表盘只显示了最通用的内容，所以可以考虑做一下自定义。以下展示两种方法。

Fluentd团队提供了另一个Kibana配置文件，如果使用模板进行自定义的话，那么这个配置文件会比Kibana的默认配置好用。运行如下命令以获取该配置文件：

注：源文件来自这个GitHub gist。

现在到浏览器里刷新页面，应该看到Kibana现在已经根据syslog的严重等级（severity）和程序模块（facility）显示矩形图，并在一个表格里展示出最近的日志内容。

在浏览器里访问Kibana仪表盘首页：

选择最下面的Blank Dashboard: I’m comfortable configuring on my own（空白模板）：

在本页面，点击右侧的+ ADD A ROW（添加行）按钮，会弹出添加新行的配置界面（一个“行”可以包含一个或多个“板块”(panel)）。输入一个名称，然后点击Create Row（创建行）按钮，然后点Save（保存）。现在就可以看到新建的行了。

空白行创建后，Kibana在页面左侧会提醒Add panel to empty row（在空白行里添加板块）。点击该按钮，会弹出新建板块的配置界面。在下拉餐单中选择histogram（矩形图）。矩形图是时间图表，详见Kibana文档。

矩形图的配置涉及很多参数，不过我们可以简单的下拉到页面底部，点击Save按钮。如此，新的板块就创建完毕了。

更多关于Kibana配置的信息，可参阅Kibana文档页。

本文来源自DigitalOcean Community。英文原文：Elasticsearch, Fluentd, and Kibana: Open Source Log Search and Visualization by Kiyoto Tamura